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Introduce myself 


ก า ร ศึ ก ษา 

ม . ต ้ น - ป ล า ย ร ร . ว ั ด บ ว ร น ิ เว ศ 

ป . ต ร ี (2546-2549) ว ิ ศว ะ (อ ิ เล ็ ค ท ร อ น ิ ก ส ์ ) พ ร ะ จ อ ม เก ล ้ า ฯ ล า ด ก ร ะ บ ั ง 

ป . โ ท (2554-2555) ว ิ ศว ะ (ไฟ ฟ้า ) Rochester Institute of Technology, NY. 

ป . เ อ ก (2560- ป ั จ จ ุ บ ั น ) ว ิ ศว ะ (ค อ ม พ ิ ว เต อ ร ์ ) จ ุ ฬา ล ง ก ร ณ์ ม ห า ว ิ ท ย า ล ั ย 
ก า ร ท ํ า ง า น 

2549-2554 ว ิ ศว ก ร ฝ่า ย ผล ิ ต บ . บ า ง ก อ ก โซ ล า ร ์ ฉะ เช ิ ง เท ร า 

2559- ป ั จ จ ุ บ ั น ผู ้ ช่ ว ย อ า จ า ร ย ์ ภา ค ว ิ ชา ฟื้น ฟู ส ม ร ร ถ ภ า พ ค น พ ิ ก า ร ว ิ ท ย า ล ั ย ร า ช ส ุ ด า ม ห า ว ิ ท ย า ล ั ย ม ห ิ ด ล 
ค ว า ม ส า ม า ร ถ 

ก า ร อ ่ า น ร ิ ม ฝี ป า ก ภา ษา ม ื อ อ เม ร ิ ก ั น ภา ษา ม ื อ ไท ย Matlab, Python programming 
ส ิ ่ ง ท ี ่ ส น ใจ 

Hardware Circuit Design, Image and Digital signal processings 

NLP (grammatical error detection and correction), Machine translation 


Sign language 


Sign language: background 


SL: definition, backeround, and parameter 


@ ภา ษา ม ื อ เป ็ น เค ร ื ่ อ ง ม ื อ ท ี ่ ใช ้ ส ื ่ อ ส า ร ส ํ า ห ร ั บ ค น ห ู ห น ว ก 
@ ภา ษา ม ื อ แต ่ ล ะ ป ร ะ เท ศ ไ ม ่ เห ม ื อ น ก ั น American SL, Thai SL, British SL, etc... 
@ ภา ษา ม ื อ ไท ย ย ื ม ภา ษา ม ื อ อ เม ร ิ ก ั น ป ร ะ ม า ณ 50% 
@ ก า ร ส ื ่ อ ส า ร ภา ษา ม ื อ ม ี 5 อ ง ค ์ ป ร ะ ก อ บ ค ื อ 
(1) ท ่ า ม ื อ (handshape) เช ่ น ต ั ว อ ั ก ษ ร ต ั ว เล ข 
(2) ก า ร เค ล ื ่ อ น ไห ว (movement) wu ว ง ก ล ม ขึ ้ น - ล ง ห น ้ า - ห ล ั ง ไป - ก ล ั บ ก ร ะ ด ิ ก ไป ม า ก า ร แต ะ 
(3) ส ี ห น ้ า (facial expression) เช ่ น ขม ว ด ค ิ ้ ว เบ ่ ง ต า โต ก ร ะ พ ร ิ บ ต า 
(4) ต ํ า แห น ่ ง ขอ ง ท ่ า ม ื อ (palm orientation) เช ่ น ท ิ ศ ท า ง พ ุ ่ ง เข ้ า พ ุ ่ ง อ อ ก ไป ท า ง ซ้ า ย - ข ว า - บ น - ล ่ า ง 
(5) ก า ร แส ด ง ท ่ า ท า ง ท ี ่ เป ็ น ส ั ญ ญ า ณ (expression/non-manual signals) เช ่ น ก า ร พ ย ั ก ห น ้ า คิ ้ ว จ ม ู ก 


ป า ก ต า 


Thai Grammar: Spoken VS Sien languages 





ภา พ ท ี ่ 3.2.3(2) ภา ษา ม ื อ ต า ม ไว ย า ก ร ณ์ ภา ษา ไท ย qu ก ิ น ข้ า ว แล ้ ว ห ร ื อ da “ค ุ ณ ก ิ น ข้ า ว แล ้ ว ห ร ื อ ย ั ง ” ก ภา พ ท ี 3.2.4(2) ภา ษา ม ื อ ไท ย ข้ า ว ก ิ น แล ้ ว + ส ี ห น ้ า ด ้ ว ย เล ิ ก ค ิ ว ห ม า ย ถึ ง “ค ุ ณ ก ิ น ข้ า ว แล ้ ว ห ร ื อ ย ั ง ” 


ร า ษ ฎ ร ์ บ ุ ญ ญ า . 2551. ภา ษา ม ื อ : ภา ษา ขอ ง ค น ห ู ห น ว ก . ว า ร ส า ร ว ิ ท ย า ล ั ย ร า ช ส ุ ด า เพ ื ่ อ ก า ร ว ิ จ ั ย แล ะ พ ั ฒ น า ค น พ ิ ก า ร . [*] 


Danthanavanich, 5. (2008). A Grammar of Thai Sign Language (Doctoral dissertation, Graduate Studies Mahidol University) 


Sign-to-meaning/word recognition: challenges 


© ห น ึ ่ ง ท ่ า ม ื อ - ห น ึ ง ค ํ า : 


๐ ก กิ น ข้ า ว ด ื ม น ํ า ไป เด ิ น 


@ ห น ึ ง ท ่ า ม ื อ - ห ล า ย ค ว า ม ห ม า ย / ห ล า ย ค ํ า : dd 


๐ ป ั ๊ น / เ ซ ร า ม ิ ก ส ์ / เค ร ื ่ อ ง ป ั ๊ น ด ิ น เผา 
๐ ผม ขั บ ร ถ 
© ห ล า ย ท ่ า ม ื อ ห น ึ ่ ง ค ํ า : 
๐ ย า ย = ค น แก ่ + “ย ” (ห ม ุ น ว น ต ร ง แก ้ ม ) 
๐ ก ั น ย า ย น = เดื อ น + 9 
© ท ่ า ม ื อ ต ่ า ง - ห น ึ ่ ง ค ํ า : 
๐ ก ิ น แฮ ม เบ อ ร ์ เก อ ร ์ ก ิ น ก ๋ ว ย เต ี ๋ ย ว 
O ก ิ น ข้ า ว ก ิ น ซุ ป 
๑ ห น ึ ่ ง ท ่ า ม ื อ อ ย ู ่ ต ่ า ง ต ํ า แห น ่ ง ค ว า ม ห ม า ย ต ่ า ง : 
O ย า ย vs ญา ต ิ vs เล ่ น 
Li, D., Rodriguez, C., Yu, X., & Li, H. (2020). Word-level deep sign language 
recognition from video: A new large-scale dataset and methods comparison. In 


Proceedings of the IEEE/CVF winter conference on applications of computer vision 
(pp. 1459-1469). 





(a) The verb “Wish” (top) and the aene" hungry” (Goto) 
correspond to the same sign. 








(b) The same sign represents different words “Rice” (top) and 
“soup” (bottom). 


Proficiency levels of sign language 


@ ภา ษา ม ื อ อ เม ร ิ ก ั น ท ี ่ 6 ล (ไล น ส 6! University ได ้ แบ ่ ง ร ะ ด ั บ ค ว า ม ส า ม า ร ถก า ร ใช ้ ภา ษา ม ื อ เป ็ น 5 ร ะ ด ั บ ต ั ง แต ่ ร ะ ด ั บ 1 ถึ ง 5 ขึ ่ น อ ย ู ่ ก ั บ 


เก ณ ฑ ์ ท ิ ก ํ า ห น ด (ด ต ั ว อ ย ่ า ง ) 


@ ค ว า ม ส า ม า ร ถก า ร ใช ้ ภา ษา ม ื อ น ี ขึ ้ น อ ย ู ่ ก ั บ ค ว า ม เป ็ น อ ย ู ่ ก า ร ด ํ า ร ง ชี ว ิ ต ก า ร ร ู ้ ภา ษา ก า ร ศึ ก ษา แล ะ ก า ร เข ้ า ส ั ง ค ม 


๐ เด ็ ก ห ู ห น ว ก ต ั ้ ง แต ่ ก ํ า เน ิ ด แล ะ ม ี พ ่ อ แม ่ เป ็ น ค น ห ู ห น ว ก ได ้ ร ั บ ภา ษา ม ื อ จ า ก พ ่ อ แม ่ โด ย ต ร ง แล ะ ร ู ้ ว ั ฒ น ธร ร ม ขอ ง ค น ห ู ห น ว ก แล ะ ม ี ค ว า ม ค ล ่ อ ง แค ล ่ ว ภา ษา ม ื อ ได ้ ด ี ก ว ่ า เด ็ ก 
ท ี ม ี พ ่ อ แม ่ เป ็ น ค น ห ู ด ี (จ ิ ต ป ร ะ ภา ศร ี อ ่ อ น , 2543) 
เด ็ ก ห ู ห น ว ก ท ิ ม ี ค ว า ม ค ล ่ อ ง แค ล ่ ว ภา ษา ม ื อ ท ี ด ี จ ะ ม ี ค ว า ม ส า ม า ร ถ ใ น ก า ร อ ่ า น เข ี ย น ได ้ ด ี ก ว ่ า เด ็ ก ท ี ม ี ค ว า ม ค ล ่ อ ง แค ล ่ ว ภา ษา ม ื อ ท ี ่ น ้ อ ย (Jim Cummins, 2007) 


๐ ค น ห ู ห น ว ก ท ี เข ้ า ส ั ง ค ม ห ู ห น ว ก จ ะ พ บ ค ว า ม ห ล า ก ห ล า ย ก า ร เป ล ี ่ ย น แป ล ง ก า ร ใช ้ ภา ษา ม ื อ ต า ม บ ร ิ บ ท ขอ ง ส ั ง ค ม 


Cummins, J. (2007). The relationship between American Sign จ ิ ต ป ร ะ ภา ศร ี อ ่ อ น . (2543). เอ ก ส า ร ป ร ะ ก อ บ ก า ร บ ร ร ย า ย เร ื ่ อ ง พ ั ฒ น า ก า ร ท า ง 
Language proficiency and English academic development: A review ภา ษา ขอ ง เด ็ ก ห ู ห น ว ก . น ค ร ป ฐ ม . ว ิ ท ย า ล ั ย ร า ช ส ุ ด า ม ห า ว ิ ท ย า ล ั ย ม ห ิ ด ล . 

of the research. BERR MERRE SAULT AMA) 

TAFE, 3, 75-94. 


Road map: 


SL corpus to recognition 


How to create a SL corpus? (จ า ก ป ร ะ ส บ ก า ร ณ์ ท ํ า ว ิ จ ั ย ร ่ ว ม ก ั บ ว ิ ท ย า ล ั ย ร า ช ส ุ ด า เพ ื ่ อ ส ร ้ า ง ภา ษา 
ม ื อ ไท ย ) 


1. Deaf signers (จ ํ า น ว น ก ิ ค น อ า ย ุ เท ่ า ไร ก า ร ศึ ก ษา ค ว า ม พ ิ ก า ร ต ั ง แต ่ ก ํ า เน ิ ด ) 
Domains: ชี ว ิ ต ป ร ะ จ ํ า ว ั น , ก ิ จ ก ร ร ม ต ่ า ง ๆ 
Level: Word (lexical) or sentence 


Filming and video setting ie., green screen, light, personal position 


Oa ae 50 0 


Agreements from sign language linguistics or teachers ท ี ม ี ป ร ะ ส บ ก า ร ณ์ ท ํ า ง า น ม า น า น 


How to create a SL corpus? (จ า ก ป ร ะ ส บ ก า ร ณ์ ท ํ า ว ิ จ ั ย ร ่ ว ม ก ั บ ว ิ ท ย า ล ั ย ร า ช ส ุ ด า เพ ื ่ อ ส ร ้ า ง ภา ษา 
ม ื อ ไท ย ) 


1. Optional ส ํ า ห ร ั บ น ้ อ ง ๆ ท ี ่ จ ะ ต ่ อ ย อ ด ใน อ น า ค ต 

a. Sign-to-text annotations or Video annotation: ELAN 

๒ . เม ื ่ อ ท ํ า เส ร ็ จ แล ้ ว ต ้ อ ง ให ้ น ั ก ภา ษา ศา ส ต ร ์ ภา ษา ม ื อ ต ร ว จ ส อ บ ด ้ ว ย เพ ื ่ อ ห า ค ุ ณ ภ า พ แล ะ ค ว า ม ถู ก ต ้ อ ง ขอ ง ง า น 
1. อ ดร. สุข ส ิ ร ิ ด ่ า น ธน ว า น ิ ช (ป ฏิ บ ั ต ิ ง า น ท ี ่ ป ร ะ เท ศ ภ ู ฏา น ) 
ผี . อ . ด ร . ม ล ิ ว ั ล ย ์ ธร ร ม แส ง (ม . ส ว น ด ุ ส ิ ต ) 
iii, อ . ส ิ ร ิ น ท ร า quitas (ว ร ส . + ล า เร ี ย น ป . เ อ ก ) 
iv. อ . ร า ษ บ ุ ญ ญ า (ว ร ส . ห ู ห น ว ก ) / อ . พ ฤ ห ั ส ศุ ภ จ ร ร ย า (ว ร ส . ห ู ห น ว ก ) 
บ . ค ร ู ป ร ะ จ ํ า โร ง เร ี ย น โส ต ศึ ก ษา ใน แต ่ ล ะ จ ั ง ห ว ั ด 


ง . ค น ห ู ห น ว ก ใน ส ม า ค ม ค น ห ู ห น ว ก แห ่ ง ป ร ะ เท ศ ไ ท ย 


Existing SL corpora 


i พ จ น า น ุ ก ร ม ภา ษา ม ื อ ไท ย ฉบับ ร า ช บ ั ณ ฑ ิ ต ย ส ภา (2559) [*] จ ั ด ท ํ า โด ย ว ิ ท ย า ล ั ย ร า ช ส ุ ด า ม ห า ว ิ ท ย า ล ั ย ม ห ิ ด ล 
ล . ค ล ั ง ค ํ า ศั พ ท ์ ป ร ะ ม า ณ 200 A ป ร ะ ก อ บ ด ้ ว ย 
i ป ร ะ โย ค ค ํ า ถา ม - ต อ บ (2 ป ร ะ โย ค ) 
i, ป ร ะ โย ค บ อ ก เล ่ า 
ii. ป ร ะ โย ค ค ํ า ส ั ่ ง / ข อ ร ้ อ ง / ป ฏิ เส ธ dun 
iv. ร ว ม ท ั ้ ง ห ม ด เป ็ น 800 ป ร ะ โย ค 
2. พ จ น า น ุ ก ร ม ภา ษา ม ื อ ไท ย ส ม า ค ม ค น ห ู ห น ว ก แห ่ ง ป ร ะ เท ศ ไ ท ย [*] 


a. ม ี ค ล ั ง ค ํ า ศั พ ท ์ ป ร ะ ม า ณ 2300 ค ํ า แต ่ ไม ่ ม ี ป ร ะ โย ค 


3. ภา ษา ม ื อ อ เม ร ิ ก ั น (ม ห า ว ิ ท ย า ล ั ย Rochester Institute of Technology) ได ้ ส ร ้ า ง เค ร ื ่ อ ง ม ื อ แล ะ ว ิ ธี ก า ร เก ็ บ ข้ อ ม ู ล (*) 


SL recognition (SLR) 


1. Rule based (One sign One word) 
2. Machine learning based (Feature extraction + Classification: SVM) 


3. Deep learning based (Review SLR: 2021 * and SLR systems: 2019 *) (CNN+RNN) 


Questions ? 


